b63d987ccdc814d30cde34c9f84dfefce43ce3da
mt5 mt5 zero-shot

 

challenge
Quiz Question Answering Challenge
submitter
Filip Graliński
submitted
2021-10-25 11:37:45.006692 UTC
file basename
out

test-B / e95af8727e719c03d60646562b91f90f02e78976
Metric Score
Acc 17.36

test-A / 203b9d90ec84b82013931cb917108e851a6e3d11
Metric Score
Acc 17.92

dev-0 / df7f1c04bb9c34c4ecad06a10b68fd0ddb31cebe
Metric Score
Acc 16.60

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!
# input expected output actual output test-A Acc
1 Jak nazywa się pierwsza litera alfabetu greckiego? alfa A 0.00
2 Jak nazywa się dowolny odcinek łączący dwa punkty okręgu? cięciwa Odcinek łączący 0.00
3 W którym państwie rozpoczyna się akcja powieści „W pustyni i w puszczy”? w Egipcie W Polsce 0.00
4 W jakim zespole występowała Hanka w filmie „Żona dla Australijczyka”? Mazowsze W zespole zespołu 0.00
5 Który numer boczny nosi czołg Rudy z „Czterech pancernych”? 102 - i - 0.00
6 Co budował w Egipcie inżynier Tarkowski, ojciec Stasia? Kanał Sueski Egipt 0.00
7 Kwartet – to ilu wykonawców? czterech czworo 4 około pięciu 0.00
8 Jak nazywa się pierwiastek o symbolu Bq? becquerel Butyrybiokarden 0.00
9 Hymnem którego kraju jest pieśń „Gwiaździsty sztandar”? Stanów Zjednoczonych USA Polski 0.00
10 Jak nazywał się sztywny kapelusz męski o zaokrąglonej główce i wąskim lekko uniesionym rondelku, modny w drugiej połowie XIX wieku? melonik Kapelusz o wąskim rondelku 0.00
11 Jak nazywa się wypukła albo wklęsła powierzchnia cieczy w pobliżu ścianek naczynia? menisk ciecz 0.00
12 Jak nazywał się fizyk, który w 1876 r. wynalazł telefon? Aleksander Graham Bell Alfred Nobel 0.00
13 Jak brzmi ulubione powiedzonko klucznika Horeszków Gerwazego? mopanku - Szukam 0.00
14 Którego gazu jest najwięcej w powietrzu? azotu tlenku węgla 0.00
15 Według przysłowia nos jest dla tabakiery czy tabakiera dla nosa? tabakiera dla nosa nos jest dla tabakiery 0.00
16 Kto jest autorem obrazu namalowanego w 1892 r. „Kobiety z Tahiti”? Paul Gauguin Leonardo da Vinci 0.00
17 Jak ma na imię brat Fidela Castro, który przejął po nim władzę? Raul Fidel Castro 0.00
18 Co znaczy pochodzące z francuskiego słowo aliant? sojusznik łączy 0.00
19 Jak nazywa się wzgórze w Paryżu na którym wybudowano bazylikę Sacré-Cœur? Montmartre Mont Blanc 0.00
20 Jak z greckiego nazywa się założenie wymagające sprawdzenia? hipoteza założenie wymagające sprawdzenia 0.00
21 Co znaczą słowa „Quo vadis”? dokąd idziesz Wszystko jest możliwe 0.00
22 Który szesnastowieczny legendarny czarnoksiężnik zwany był polskim Faustem? Pan Twardowski Faust 0.00
23 Jak nazywa się trucizna przyrządzona z korzenia szaleju? cykuta szał 0.00
24 Jak nazywa się stolica Kuby? Hawana Kuba 0.00
25 Jak nazywa się agent brytyjskiego wywiadu, bohater powieści Iana Fleminga? James Bond Alfred Porter 0.00
26 W jakim stylu wykonany został nagrobek Kazimierza Jagiellończyka? gotyckim W stylu angielskim 0.00
27 W którym mieście zginęła w wypadku samochodowym księżna Diana? w Paryżu W Gdańsku 0.00
28 Kto grał postać Maliniaka w „Czterdziestolatku”? Roman Kłosowski Andrzej Wajda 0.00
29 Na którym kontynencie występuje ryś iberyjski? w Europie Na południowym 0.00
30 Kto gra Kingę Zduńską w serialu „M jak miłość”? Katarzyna Cichopek Natalia 0.00
31 W których górach leżą wrota Chałubińskiego? w Tatrach W górze Kościelna 0.00
32 Które wrota znajdują się w tytule filmu Romana Polańskiego? dziewiąte wrota 0.00
33 Na której japońskiej wyspie znajduje się port Yokohama? na Honsiu Na wyspie Honshu 0.00
34 Proszę rozwinąć skrót powstałego w 1918 roku urzędu GUS. Główny Urząd Statystyczny GUS 0.00
35 Jak nazywa się przyrząd do palenia i górny kieł dzika? fajka - ołówek 0.00
36 W którym filmie Krzysztofa Kieślowskiego zagrali Olaf Lubaszenko i Grażyna Szapołowska? „Krótki film o miłości” W Ostatnim człowieku 0.00
37 Dokończ przysłowie: „dobry zwyczaj: nie...”? pożyczaj nie 0.00
38 Ile trzeba zjeść z kimś soli, żeby dobrze go poznać? beczkę około 10 razy 0.00
39 Które polskie miasto nie od razu zbudowano? Kraków Warszawa 0.00
40 Gdzie miały miejsce objawienia z 1917 roku? w Fatimie w Warszawie 0.00

Compare with other submission